input_list_path="/home/work_nfs11/code/xlgeng/gxl_ai_utils/eggs/cats_and_dogs/ngram_task/data_handler/haha/asr_all.txt"
output_dir="./gxl_data_zoo/asr_all"
mkdir -p $output_dir
python main.py $input_list_path $output_dir



input_list_path="/home/work_nfs11/kxhuang/data/lm_data/music_text/music_name"
output_dir="./gxl_data_zoo/music_text/music_name"
mkdir -p $output_dir
python main.py $input_list_path $output_dir

input_list_path="/home/work_nfs11/kxhuang/data/lm_data/music_text/singer_name"
output_dir="./gxl_data_zoo/music_text/singer_name"
mkdir -p $output_dir
python main.py $input_list_path $output_dir


input_list_path="/home/work_nfs11/kxhuang/data/lm_data/nlp_text/baike_text"
output_dir="./gxl_data_zoo/nlp_text/baike_text"
mkdir -p $output_dir
python main.py $input_list_path $output_dir


input_list_path="/home/work_nfs11/kxhuang/data/lm_data/nlp_text/news_text"
output_dir="./gxl_data_zoo/nlp_text/news_text"
mkdir -p $output_dir
python main.py $input_list_path $output_dir

input_list_path="/home/work_nfs11/kxhuang/data/lm_data/nlp_text/web_text"
output_dir="./gxl_data_zoo/nlp_text/web_text"
mkdir -p $output_dir
python main.py $input_list_path $output_dir


input_list_path="/home/work_nfs11/kxhuang/data/lm_data/nlp_text/wiki_text"
output_dir="./gxl_data_zoo/nlp_text/wiki_text"
mkdir -p $output_dir
python main.py $input_list_path $output_dir


input_list_path="home/work_nfs/xiongwang/project/lstm_ctc/egs/syl2char_data/SogouNews-15G.txt"
output_dir="./gxl_data_zoo/syl2char_data"
mkdir -p $output_dir
python main.py $input_list_path $output_dir

input_list_path="/home/work_nfs8/xlgeng/new_workspace/gxl_ai_utils/eggs/cats_and_dogs/ngram_task/data_handler/haha/all_data-nospace-ABC.txt"
output_dir="./gxl_data_zoo/chumenwenwen_nlp"
mkdir -p $output_dir
python main.py $input_list_path $output_dir



